video içerik analizi ne demek?

Video içerik analizi veya video analizi olarak da bilinen video içerik analizi, zamansal ve uzamsal olayları algılamak ve belirlemek için videoyu otomatik olarak analiz etme yeteneğidir.

Bu teknik yetenek, eğlence, video alma ve video tarama,1 sağlık hizmetleri, perakende, otomotiv, ulaşım, ev otomasyonu, alev ve duman algılama, ve güvenlik dahil olmak üzere çok çeşitli alanlarda kullanılmaktadır. Algoritmalar, genel amaçlı makinelerde yazılım olarak veya özel video işleme birimlerinde donanım olarak uygulanabilir.

Video içerik analizinde birçok farklı işlev uygulanabilmektedir. Video Hareket Algılama, sabit bir arka plan sahnesine göre hareketin algılandığı daha basit biçimlerden biridir. Daha gelişmiş işlevler, video izleme2 ve egomotion tahmini içerir3.

Video içerik analizinin makinede oluşturduğu dahili temsile dayalı olarak, video özetleme,4 tanımlama, davranış analizi veya diğer durum farkındalığı biçimleri gibi başka işlevler oluşturmak mümkündür.

Video içerik analizi, iyi video girişine dayanmaktadır. Bu nedenle genellikle video gürültü azaltma, görüntü sabitleme, keskin olmayan maskeleme ve süper çözünürlük gibi video geliştirme teknolojileriyle birleştirilmektedir.

İşlevler

Birkaç makale, video analitik uygulamalarının geliştirilmesinde yer alan modüllere genel bir bakış sağlaöaktadır56.

Bu, bilinen işlevlerin bir listesi ve kısa bir açıklaması aşağıda yer almaktadır:

FonksiyonAçıklama
Dinamik maskelemeÖrneğin, gizlilik endişeleri nedeniyle, sinyalin kendisine dayalı olarak video sinyalinin bir kısmının engellenmesi.
Alev ve duman algılamaAkıllı video gözetim teknolojisine sahip IP kameralar, dahili DSP çipi sayesinde 15-20 saniye veya daha kısa sürede alev ve dumanı algılamak için kullanılabilir. Çip, renk krominansı, titreme oranı, şekil, desen ve hareket yönü gibi alev ve duman özellikleri için yakalanan videoları analiz eden algoritmaları işler.
Egomotion tahminiEgomotion tahmini, çıkış sinyalini analiz ederek bir kameranın konumunu belirlemek için kullanılır.
Hareket algılamaHareket algılama, gözlemlenen sahnede ilgili hareketin varlığını belirlemek için kullanılır.
Şekil tanımaŞekil tanıma, giriş videosundaki, örneğin daireler veya kareler gibi şekilleri tanımak için kullanılır. Bu işlevsellik tipik olarak nesne algılama gibi daha gelişmiş işlevlerde kullanılır.
Nesne algılamaNesne algılama, örneğin bir kişi veya araba gibi bir nesne veya varlığın varlığını belirlemek için kullanılır. Diğer örnekler yangın ve duman algılamayı içerir.
TanımaYüz tanıma ve Otomatik Plaka Tanıma, kişileri veya arabaları tanımak ve dolayısıyla muhtemelen tanımlamak için kullanılır.
Stil algılamaStil algılama, örneğin televizyon yayını için video sinyalinin üretildiği ayarlarda kullanılır. Stil algılama, üretim sürecinin stilini algılar.
Müdahale tespitiDış müdahale algılama, kameranın veya çıkış sinyalinin kurcalanıp kurcalanmadığını belirlemek için kullanılır.
Video izlemeVideo izleme, muhtemelen harici bir referans ızgarası ile ilgili olarak, video sinyalindeki kişilerin veya nesnelerin konumunu belirlemek için kullanılır.
Video hata düzeyi analiziÜcretsiz yazılım kullanarak video sahne içeriği kurcalama analizidir.
Nesne ortak segmentasyonuBir veya daha fazla ilgili video dizisinde ortak nesne keşfi, hedeflerin sınıflandırılması ve segmentasyonu

Ticari uygulamalar

Video içerik analizi, 2000'li yılların ortalarında video içerik analizi ile geliştirilmiş ürünler piyasaya süren çok sayıda şirket ile nispeten yeni bir teknolojidir789. Pek çok uygulama olsa da, farklı video içerik analizi çözümlerinin sicili büyük ölçüde farklılık göstermektedir. Hareket algılama, insan sayma ve silah algılama gibi işlevler, ticari olarak hazır ürünler olarak mevcuttur ve iyi bir geçmişe sahip olduklarına inanılmaktadır (örneğin, dsprobotics Flowstone gibi ücretsiz yazılımlar bile hareket ve renk analizini işleyebilir). COVID-19 pandemisine yanıt olarak birçok yazılım üreticisi, yüz maskesi algılama veya sosyal mesafe takibi gibi yeni halk sağlığı analizlerini tanıtmıştır101112.

Birçok alanda video içerik analizi, ya kameralara dağıtılmış (en uçta) ya da özel işleme sistemlerinde merkezileştirilmiş CCTV sistemlerinde uygulanmaktadır. Video Analizi ve Akıllı CCTV, güvenlik alanındaki video içerik analizi için ticari terimlerdir. Birleşik Krallık'ta BSIA, güvenlik alanında video içerik analizi için bir giriş kılavuzu geliştirmiştir. Video analizine ek olarak ve onu tamamlamak için ses analizi de kullanılabilir13.

Video yönetim yazılımı üreticileri, mevcut video analiz modüllerinin yelpazesini sürekli olarak genişletmektedir. Yeni şüpheli takip teknolojisi ile bu deneğin tüm hareketlerini kolaylıkla takip etmek mümkündür: nereden geldikleri ve ne zaman, nerede ve nasıl hareket ettikleri. Belirli bir gözetim sistemi içinde, indeksleme teknolojisi, belirli bir süre boyunca veya belirli bir süre içinde kameraların bakış açıları içinde bulunan benzer özelliklere sahip kişileri bulabilmektedir. Genellikle sistem, benzer özelliklere sahip birçok farklı insan bulur ve bunları anlık görüntüler şeklinde sunmaktadır. Operatörün yalnızca izlenmesi gereken resimlere ve konulara tıklaması yeterlidir. Yaklaşık bir dakika içinde, belirli bir kişinin tüm hareketlerini izlemek ve hatta hareketlerin adım adım bir videosunu oluşturmak mümkündür.

Kinect, kullanıcı girişinin bir kısmı için video içerik analizi kullanan Xbox 360 oyun konsolu için ek bir çevre birimidir14.

Perakende sektöründe, video içerik analizi, mağaza içindeki alışveriş yapanları izlemek için kullanılır15. Bu sayede mağaza tasarımı ve pazarlama optimizasyonları için faydalı olan mağazanın bir ısı haritası elde edilebilir. Diğer uygulamalar, bir ürüne bakarken bekleme süresini ve öğenin kaldırıldığını/bırakıldığını algılamayı içerir.

Ticari ortamda video içerik analizinin kalitesini belirlemek zordur. Kullanım durumu, uygulama, sistem konfigürasyonu ve bilgi işlem platformu gibi birçok değişkene bağlıdır. Ticari ortamlarda kalite hakkında objektif bir fikir edinmenin tipik yöntemleri arasında bağımsız kıyaslama16 ve belirlenmiş test yerleri bulunur.

Video içerik analizi, özellikle Londra'daki The O2 Arena ve The London Eye'da kalabalık yönetimi amacıyla kullanılmıştır.

Kanun yaptırımı

Polis ve adli bilim adamları, suç faaliyetlerini araştırırken CCTV videosunu analiz ediyor. Polis, videodaki önemli olayları aramak ve şüphelileri bulmak için video içerik analizi yapan Kinesense gibi bir yazılım kullanır. Anketler, vakaların %75'ine kadarının CCTV içerdiğini göstermiştir. Polis, önemli olaylar için uzun videoları aramak için video içerik analiz yazılımı kullanır.

Akademik araştırma

Video içerik analizi, bilgisayarlı görünün ve dolayısıyla yapay zekanın bir alt kümesidir. İki büyük akademik kıyaslama girişimi, i-LIDS video görüntüsünün küçük bir bölümünü kullanan TRECVID17 ve PETS Benchmark Data'dır18. Takip, sol bagaj algılama ve sanal eskrim gibi işlevlere odaklanırlar. UCF101 gibi karşılaştırmalı video veri kümeleri, zamansal ve uzamsal görsel dikkati evrişimli sinir ağı ve uzun kısa süreli bellek ile birleştiren eylem tanıma araştırmalarına olanak tanır. Video analiz yazılımı ayrıca, görüntüleri kamuya açıklanacak şekilde daha kolay yeniden düzenlemek ve videolardaki olayları ve kişileri tanımlamak için vücuda takılan ve gösterge paneli kameralarından alınan görüntülerle eşleştiriliyor19.

Avrupa Birliği, gömülü sistemlerde video içerik analitiğini polis ve ulaşım güvenliği veri tabanlarıyla bütünleştirmek için P-REACT20 adlı bir FP7 projesini finanse ediyor21.

Yapay zeka

Video gözetimi için yapay zeka, insanları, araçları, nesneleri ve olayları tanımak için video gözetim kameralarından gelen ses ve görüntüleri analiz eden bilgisayar yazılım programlarını kullanır. Güvenlik müteahhitleri programı, kamera gözetimi ile korunan mülk için kameranın görüşü (örneğin çitle çevrili bir alan, bir park yeri gibi, ancak park yeri dışındaki kaldırım veya halka açık cadde değil) ve günün saatleri için (örneğin iş kapanışından sonra) programlanan kısıtlı alanları tanımlayan yazılımdır. Yapay zeka, günün o saatinde o bölgeye kimsenin girmesine izin verilmeyen "kural" setini ihlal eden bir kişi tespit ederse bir uyarı gönderir.

Ayrıca bakınız

  • Etkinlik tanıma
  • Video gözetimi için yapay zeka
  • Adli video analizi
  • Nesne ortak segmentasyonu
  • Hareketten yapı
  • Video tarama
  • Video hareket analizi
  • Video işleme

Kaynakça

Orijinal kaynak: video içerik analizi. Creative Commons Atıf-BenzerPaylaşım Lisansı ile paylaşılmıştır.

Footnotes

  1. Security and Fire News and Resources. 2013-12-12. | arşivurl = https://web.archive.org/web/20201021170950/https://www.ifsecglobal.com/video-surveillance/infographic-history-of-video-surveillance/ | arşivtarihi = 21 Ekim 2020}}

  2. Fast Company {{!}} The Future Of Business | arşivurl = https://web.archive.org/web/20170303175154/https://www.fastcompany.com/3061935/police-body-cameras-livestreaming-face-recognition-and-ai | arşivtarihi = 3 Mart 2017}}

Kategoriler